PushDualGen: Enabling LLMs to Generate Semantic IDs with Interpretable Copy for Industrial Push Recommendation
PushDualGen:让LLM生成语义ID与可解释文案的工业推送推荐框架
🧭 生成式推荐 · Semantic ID ★ 深度解读
Kuaishou Technology, Beijing, China
先生成SID再生成可跳过解释的轻量框架,在快手十亿用户推送中有效播放率+8.5%,不满意度-37.7%
📌 工作参考价值(4 点)
- 并行 SID 构建:采用多个独立码本并行量化,避免残差 SID 的误差累积与层级依赖,可直接用于商品/内容的多粒度高压缩表示
- SID 与 LLM 对齐:通过 Text2SID 和 SID2Text 双向任务微调,并冻结原词表只训练新增 SID token embedding,轻量且稳定,适合将推荐系统离散索引注入 LLM
- 多 token 绑定策略:合并高频 n-gram 与语义原子实体为单 token,降低推理序列长度,在生成推荐文案或搜索词时可显著压缩成本
- 生成信号与召回融合:将 LLM 生成的 Top‑N SID 编码成向量与用户特征融合后做 ANN 检索,可提升冷启动物料曝光与长尾覆盖率,对电商冷启动物品召回有直接参考